
T^f^T WELTORGANISATION FtFR GEISTIGES EIGENTUM 

*• A Inter nation ales BUro _ 

INTERNATIONALE ANMELDUNG VEROFFENTLICHT NACH DEM VERTRAG OBER DIE 
INTERNATIONALE ZUSAMMEN ARBEIT AUF DEM GEBIET PES PATENTWESENS (PCT) 



(51) Internationale Patentklassifikation 6 : 
H04N 7/167, 1/44 



Al 



(11) Internationale Ver often tlichungsnummer: WO 97/00578 

3. Januar 1997 (03.01.97) 



(43) Internationales 

Veroffentlichungsdatum 



(21) Internationales Aktenzeichen: PCT/DE96/01057 

(22) Internationales Anmeldedatum: 14. Juni 1996 (14.06.96) 



(30) Prioritatsdaten: 
195 21 969.4 



16. Juni 1995 (16.06.95) 



DE 



(71) Anmelder (fur alle Bestimmungsstaaten ausser US): 

FRAUNHOFER-GESELLSCHAFT ZUR FORDERUNG 
DER ANGEWANDTEN FORSCHUNG E.V. [DE/DE]; 
Leonrodstrasse 54, D-80636 Mtlnchen (DE). 

(72) Erfinder; und 

(75) Erfinder/Anmelder (nur fur US): KOCH, Eckhard [DE/DE]; 
Darmstadter Strasse 8, D-64625 Bensheim (DE). ZHAO, 
Jian [CN/DE]; Ringstrasse 115, D-64380 Rossdorf (DE). 

(74) Anwalt: ROSLER, Uwc; MQnich, Rosier, Steinmann, Wilhelm- 
Mayr-Strasse 11, D- 8 068 9 Mtlnchen (DE). 



(81) Bestimmungsstaaten: CA, JP, US, europaisches Patent (AT, 
BE, CH, DE, DK, ES, FI, FR, GB, GR, IE, IT, LU, MC, 
NL, PT, SE). 



Veroffentlicht 

Mit internationalem Recherchenbericht 

Vor Ablauf der fUr Anderungen der Ansprtiche zugelassenen 

Frist. Veroffentlichung wird wiederkolt falls Anderungen 

eintreffen. 



(54) Title: METHOD OF MARKING BINARY-CODED DATA SETS 

(54) Bezeichnung: VERFAHREN ZUR MARKIERUNG BINAR CODIERTER DATENSATZE 



IMAGE 
Bild 



POSITION SEQUENCES 
GENERATOR 



SECRET KEY 

geheimer Schliissel 



Generator 
von Positions- 
xeihenfolgen 



CODE TO BE EMBEDDED 

einzubettender Code 



Positions- 
reihenfolge 



POSITION 
SEQUENCE 



1 



EMBEDDING 
SYSTEM FOR 
MARKINGS 



EINBETTUNGS 
SYSTEM FOR 
MARKIERUNGEN 



MARKED IMAGE 

markiertes Bild 
^ 



(57) Abstract 

Disclosed is a method of marking binary-coded data sets, especially image data or audio signals, by applying at least one information 
unit to a data set. The invention is characterised by the generation of a discrete position sequence for the application of information units 
to the data set to be marked, taking into account data-specific characteristics and using a key; and by the fact that the information unit to 
be applied is written and read at the positions established in the position sequence in the data set. 

(57) Zusammenfassung 

Beschrieben wird ein Verfahren zur Markierung binar codierter Datensatee, insbesondere von Bilddaten oder Audio-Signalen, durch 
Implementierung wenigstens einer Informationseinheit in einen Datensatz. Die Erfindung zeichnet sich dadurch aus, daB eine diskrete Posi- 
tionsfolge zur Implementierung von Informationseinheiten in den zu markierenden Datensatz unter Beriicksichtigung datensatzspezifischer 
Eigenschaften sowie unter Verwendung eines SchlUssels generiert wird und daB die zu implementierende Informationseinheit an die durch 
die Positionsfolge festgelegten Positionen im Datensatz geschrieben bzw. gelesen wird. 
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Verfahren zur Markierung binar codierter Datensatze 
Beschreibung 
Technisches Gebiet 

Die Erfindung bezieht sich auf ein Verfahren zur Mar- 
kierung binar codierter Datensatze f insbesondere von 
Bilddaten oder Audio-Signalen, durch Impleraentierung 
wenigstens einer Inf ormationseinheit in einen Datensatz . 

Stand der Technik 

Der Schutz der Urheberrechte und Verwertungsrechte ist 
eines der Hauptanliegen der Anbieter von elektronischen 
Informationen, Verlegern, Medienkonzernen und Verwer- 
tungsgesellschaften. Ein Hauptanliegen von Urhebern ist 
der Schutz vor unerlaubten Vervielf altigungen und Ver- 
breitungen von urheberrechtlich geschutzten multimedia- 
len Werken. In vielen Fallen, wie beispielsweise in der 
Verbreitung elektronisch gespeicherter Daten, ist die 
unmittelbare Verhinderung der unrechtmapigen Verbrei- 
tung nicht moglich, so dap Techniken entwickelt worden 
sind, die die Verfolgung und Aufspurung unautorisierter 
Vervielf altigungen ermoglichen sowie deren Ruckverf olgung 
nachweisen. 

Derartige, in den einzelnen elektronischen Datensatzen 
einzubringende Ma£nahmen sehen den sogenannten ste- 
ganographischen Ansatz vor, die eine Technik darstellt, 
die zusatzliche Informationen in Daten geheim einbet- 
tet, indem sie die originalen Daten modifiziert, ohne 
die Qualitat und das Erscheinungsbild der Daten wesent- 
lich zu beeinf lussen. So sind verschiedene Methoden 
untersucht worden, originale digitale Daten leicht zu 
modif izieren, um dadurch zusatzliche Informationen zu 




WO 97/00578 _ 2 _ PCT/DE96/010S7 

speichern. Matsui & Tanaka haben eine Reihe von ste- 
ganographischen Methoden zur Identif ikation bei ver- 
schiedenen Typen von digitalen Bildern, Videos Oder 
Faxsimile vorgestellt. Siehe hierzu insbesondere die 
Druckschrift von Mantusi and K. Tanaka, "Video-Ste- 
ganography: How to secrety embed a signature in a 
picture", IMA Intellectual Property Project Proceedings, 
Vol. 1, No. 1, 1994. 

Das zugrundeliegende Prinzip ihrer Methoden beruht 
darauf, die Information so einzubetten, dafi diese nur 
eine weitere Ungenauigkeit , d.h. eine Erhohung im 
Rauschpegel, der Ursprungsdaten zu sein scheinen. 

Forscher bei AT & T haben Moglichkeiten der Einbettung 
von Informationen in Form von Storungen bei einer 
wichtigen anderen Klasse von Dokumenten, namlich 
strukturierten Texten untersucht, indem sie den Abstand 
zwischen auf einanderf olgenden Zeilen des Textes und den 
Abstand zwischen Wortern veranderten. Hierzu verwiesen 
auf J. Brassil et al, "Electronic Marking and 
Identification Techniques to Discourage Document 
Copying", AT & T Bell Laboratories, Murray Hill, N.J., 
1994 . 



Die existierenden steganographischen Techniken fur 
digitale Bilder erfxillen bei weiten nicht die Anfor- 
derungen fur den Schutz und Nachweis intellektueller 
Eigentumsrechte von multimedialen Werken und Informa- 
tionen. Dies ist darin begrundet, dap die Techniken keinen 
Schutz gegen absichtliche oder unabsichtliche Angriffe 
bieten, die durch die digitale Verarbeitung der Da ten, 
d.h. insbesondere der Bilder, moglich sind. Die L6- 
schung, Veranderung oder Unkenntlichmachung der einge- 
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betteten Inf ormationen kann bei den herkommlichen Ver- 
fahren z.B. leicht durch verlustbehaf tete Bildkompres- 
sion, TiefpaB-Filterung und/oder durch einf aches Wech- 
seln des Daten- bzw. Bildformates verursacht werden. 
Derartige Verarbeitungsschritte werden sogar oft 
zwangslaufig auf dem Weg eines multimedialen Dokumentes 
vom Urheber zum Endabnehmer bzw. -benutzer durchlaufen, 
weshalb die herkommlichen Verfahren keinen fundierten 
Identif ikationsnachweis liefern konnen. 

Aus der europaischen Druckschrift EP 0 581 317 geht ein 
Verfahren zur digitalen Kennzeichnung digital abge- 
speicherter Datensatze, beispielsweise digitale Bilddaten, 
hervor. Das in dieser Druckschrift beschriebene Verfahren 
dient der Integration von digitalen Signaturen, soge- 
nannten Markierungen , in digitalen Bildern. Die digitalen 
Signaturen sollen der kunftigen Identif ikat ion der Bilder 
dienen. Dazu werden Pixel des Bildes, welche relative 
Maxima und Minima, d.h. Extrema, in den Pixelwerten bzw. 
Luminanzwerten aufweisen, ausfindig gemacht . Von den 
derart bestimmten Punkten bzw. Pixelwerten des Bildes 
werden Punkte zur Integration eines Identif ikations- 
codes, die sogenannte Signatur, ausgewahlt. Zur Inte- 
gration jeweils eines Bits der Signatur an jeweils einen 
ausgewahlten Punkt des Bildes werden der Pixelwert selbst 
un unmittelbar benachbarte Pixelwerte angepaBt, d.h. 
modifiziert. Diesem Verfahren haftet jedoch der Nachteil 
an, daB die ausgewShlten Positionen, an denen die 
Signaturwerte integriert werden, sehr leicht bestimmbar 
und daher als bekannt anzusehen sind. Durch die Wahl der 
Positionen an urspriinglich vorhandenen Extremwerten konnen 
die auf diese Weise durchgef uhrten integrierten Identifika- 
tionscodes leicht erkannt und entsprechend attackiert 
werden . 



BNSOOCID: <WO__9700578A1J_> 





WO 97/00578 



-4- 



PCT/DE96/01057 



Ebenso geht aus einer europaischen Druckschrif t , 
EP 0 614 308 Al ein Verfahren zur Verschlusselung von 
Daten hervor. Derartige Verschliisselungsverf ahren dienen 
jedoch der vollstandigen Unkenntlichmachung eines gesamten 
Datensatzes fiir unautorisierten Zugriff . Hierbei werden 
hochauf losende Bildkomponenten mit Hilfe eines Schliissels 
bzw. einer Verschliisselungstechnik vor unberechtigtem 
Zugriff geschiitzt. Nicht-hochauf losende Bildkomponenten 
konnen jedoch frei zuganglich bleiben, so dap auf diese 
Weise ein hierarchischer Zugriff auf die Inf ormationen 
moglich ist. Samtliche Bildinf ormationen konnen hierbei in 
einem Speichermedium vorliegen, wobei nur berechtigte 
Benutzer mittels des Ihnen zur Verfiigung gestellten 
Schliissels auf die voile Bildinf ormation Zugriff haben. 
Das in der vorzitierten europaischen Druckschrift be- 
schriebene Verfahren dient jedoch nicht einer gezielten 
Markierung von beispielsweise Bildinf ormationen fur eine 
kiinftige Identif ikation, sondern vielmehr der Ver- 
schliisselung des gesamten Inf ormationsinhaltes eines 
Bildes, so da/5 ein Nichtberechtigter auf diese In- 
f ormationen ohne Zugriff bleibt. 

Darstellung der Erfindung 

Der Erfindung liegt daher die Aufgabe zugrunde, ein 
Verfahren zur Markierung binar codierter Datensatze, 
insbesondere von Bilddaten oder Audio-Signalen, durch 
Implementierung wenigstens einer Inf ormationseinheit in 
einen Datensatz derart weiterzubilden, indem eindeutig 
zuordnenbare Inf ormationseinheiten derart in den 
urheberrechtlich zu schutzenden Datensatz implementiert 
werden , so da/3 deren Zuordnenbarkeit durch Veranderungen 
am Datensatz nicht verloren geht. Das 
Identif ikationsverf ahren soil dem Urheber sowie den 
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Abnehmern und Verbreitern von multimedialen Werken die 
Moglichkeit geben, die Urheberschaf t und Eigentumschaf t zu 
iiberpriifen sowie Nachweise fiir den Mif3brauch der 
multimedialen Werke zu liefern. 

Die Losung der der Erfindung zugrundeliegenden Aufgabe 
sind in den Anspriichen 1 und 10 angegeben. Vorteilhafte 
Weiterbildungen des erf indungsgema/Je Verfahrens sind 
anschliependen Anspriichen 2 ff. zu entnehmen. 

Erf indungsgemap ist ein Verfahren zur Markierung binar 
codierter Datensatze, insbesondere von Bilddaten oder 
Audio-Signalen, durch Implementierung wenigstens einer 
Informationseinheit in einen Datensatz derart ausgebildet, 
da/3 eine diskrete Posit ions f olge zur Implementierung von 
Informationseinheiten in den zu markierenden Datensatz 
unter Beriicksichtigung datensatzspezif ischer Eigenschaf ten 
sowie unter Verwendung eines Schlussels generiert wird 
und, da/5 die zu implementierende Inf ormationseinheit an 
die durch die Positionsf olge festgelegten Positionen im 
Datensatz geschrieben bzw. gelesen wird. 

Das erf indungsgemafie Verfahren ermoglicht zusatzliche 
Inf ormationen geheim, versteckt und robust in multime- 
dialen Daten, d.h. inbesondere digitalen Bildern zu 
integrieren. Das gleiche Verfahren lapt sich jedoch auch 
zu Kennzeichnung von Audio-Signalen anwenden, die Signale 
betreffen, die zeitlich und nicht nach Pixelwerten 
strukturiert sind . 

Neben der Anwendung bei farbigen, graustufigen und binaren 
Einzelbildern, ist das erf indungsgemape Verfahren auch bei 
digitalen Videodaten, d.h. Bildfolgen, anwendbar. Die 
Einbettung der zusatzlichen Inf ormationen fiihrt zu keiner 
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wahrnehmbaren Verschlechterung der Bildqualitat . Die 
eingebetteten Informationen konnen bei Kenntnis eines 
moglicherweise geheimzuhaltenden Schliissels rekonstruiert 
we r den . 

So wird erf indungsgema/3 in einem ersten Verfahrens- 
schritt eine pseudo-zuf allige Positionsf olge generiert, 
welche zur Bestimmung der Position verwendet wird f an 
der ein Code oder allgemein eine Inf ormationseinheit 
integriert werden soil. Dazu werden Charakteristika, 
welche beispielsweise aus den Bilddaten extrahiert 
werden, in Kombination mit einem geheimen Schliissel als 
Startwert fur die Positionsgenerierung verwendet. In 
einem zweiten Schritt wird die Inf ormationseinheit , ah 
die durch die Positionsf olge spezif izierten Positionen 
geschrieben oder aus diesen ausgelesen. Es existieren 
hierfur unterschiedliche Methoden fur das Schreiben 
bzw. Lesen der Inf ormationseinheit , welche in Abhangig- 
keit vom Bildtyp verwendet werden, 

Grundsatzlich sind drei zu unterscheidende Markierungs- 
techniken in Abhangigkeit der zu markierenden Daten- 
satze zu unterscheiden: 

A) Die frequenzbasierte Markierung von Farbbildern und 
graustufigen Bildern. 

Dieses Verfahren basiert auf der Kenntnis, da/J typische 
digitale Bilder von Menschen, Gebauden, natiir lichen 
Umgebungen etc. als nicht stationare statistische Pro- 
zesse angesehen werden konnen, die stark redundant und 
storungstolerant sind. 

Die Einbettung der binar codierten Informationen er- 
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folgt im Frequenzraum des Bildes. Die folgende Be- 
schreibung geht von einer Darstellung des Bildes im 
Ortsraum aus , in die jedes Bild konvertiert werden 
kann. Das Bild wird zunachst in Blocke von Pixeln zer- 
legt. Die Blocke werden mittels einer Transformations- 
funktion vom Ortsraum in den Frequenzraum trans for- 
miert. Hierzu sind beliebige Trans formations funktionen 
zu verwenden. Eine bevorzugte Moglichkeit ist die Ver- 
wendung der sogenannten "Discrete Cosinus Transforma- 
tion" (DCT) . Weitere Trans formationen sind ebenso sinnvoll 
anwendbar, wie beispielsweise die Wavelet-Transformation, 
die Four iertrans formation, die Hadamard-Walsh 
Trans formationen oder die Z -Trans formation . Gerade bei 
Wavelete-Trans formationen sind gr6J3ere Blockgro/Jen 
sinnvoll. Anschliefiend werden die Blocke von Fre- 
quenzkomponenten bzw. die fur die Einbettung relevanten 
Telle der Blocke quantisiert. Zur Quantisierung werden 
vorzugsweise Quantisierungsmatrizen ahnlich wie die bei 
dem Quantisierungsschritt des JPEG-Kompress ions stan- 
dards verwendet. Beziiglich des vorgenannten Kompres- 
sionsstandards sei auf die Druckschrift von Wallace 
verwiesen, "The JPEG still picture compression stan- 
dard" , Communications of the ACM, Vol. 34, No. 4, April 
1991, S. 30-40. 

Mittels der im ersten Schritt des erf indungsgema/3en 
Verfahrens generierten Positions folgen werden die 
Blocke sowie die genauen Positionen innerhalb der aus- 
gewahlten Blocke bestimmt, an die die Inf ormationen 
eingebettet werden. Die Einbettung eines Bits ("1" oder 
"0" ) in einen Block erfolgt, indem bestimmte Relations- 
muster, d.h. GroJJenverhaltnisse, zwischen bestimmten 
Elementen, den sogenannten Frequenzkoef f izienten des 
Blocks mit einer moderaten Varianzschwelle gehalten 
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bzw. erzeugt werden. 

Sinnvollerweise werden Elemente des mittleren Frequenz- 
bereiches zu Einbettung herangezogen, da hochf requente 
Anteile z.B. durch verlustbehaf tete Kompression, ohne 
sichtbaren Qualitatsverlust leicht eliminiert werden 
konnen und Modif ikationen in den niederf reguenten An- 
teilen zu sichtbaren Anderungen fiihren. Prinzipiell 
sind jedoch alle Frequenzkoraponenten verwendbar. 

Um die Implementierung der zur Markierung verwendeten 
Informationseinheiten moglichst unantastbar gegen unge- 
wollten Zugriff und/oder gegen Datenverarbeitungspro- 
zesse, die den Datensatz formatieren bzw. in geeignete 
Formen umordnen, zu machen, ist die sogenannte Robust- 
heit der eingebetteten Informationen gegen unautori- 
sierten Zugriff durch Einstellung zweier Parameter zu 
optimieren. Dies ist zum einen die sogenannte Distanz D 
zwischen ausgewahlten, quantisierten Frequenzkomponen- 
ten, wobei eine gr60ere Distanz eine starkere Robust- 
heit liefert, wodurch jedoch auch eine leichtere Sicht- 
barkeit der Modif ikationen verbunden ist. Der zweite 
Parameter ist der sogenannte Quantisierungsf aktor Q, 
der benutzt wird, um die ausgesuchten Werte fur den 
eingebetteten Inf ormationscode zu quantisieren. Ein 
grSperer Quantisierungsf aktor resultiert in einer klei- 
neren Modif ikation der Bilddaten, aber auch in schwa- 
cherer Robustheit gegenuber verlustbehafteter Kompres- 
sionen, wie sie beispielsweise von der JPEG-Kompression 
bekannt sind. 

Um die Robustheit der Markierung gegen Attacken weiter zu 
erhohen kann ein wiederholtes ( redundantes ) markieren 
vorgenommen werden. Dazu werden die gleichen Informationen 
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Oder Informationseinheiten mehr als einmal in die 
urspriinglichen Daten integriert . Falls alle Blocke eines 
Datensatzes ausgewahlt und markiert worden sind, wird 
dadurch eine Art ' holographische ' Markierung erzielt. 

Bei der Aufteilung eines Datensat2es in Blocke kann die 
BlockgrofJe variabel sein. Im Extremfall besteht der 
komplette Datensatz aus einem einzigen gro/Sen Block; im 
Falle des f requenzbasierten Verfahrens ist dann 
auch der gesamte Block bzw. Datensatz zu trans f ormieren . 
Die Blockgrope kann andererseits bis 1 Pixel pro Block 
reduziert werden, wobei eine sinnvolle Blockgrope bei 2x2 
Pixel liegt. Die verschiedenen Blocke innerhalb eines 
Datensatzes konnen auch von unterschiedliche Gro/3e sein. 

Nach der Implement ierung der Informationseinheiten kann 
das Bild durch eine Riickquantisierung und Riicktrans for- 
mation wieder in eine Representation im Ortsraum ge- 
bracht werden. 

Das Verfahren erlaubt eine Vielzahl von Variationsmog- 
lichkeiten, wie z.B. die beliebige Wahl der Transforma- 
tion, der Blockbildung, der Auswahl der betrachteten 
Frequenzkomponenten, der Anzahl, Art und Zusammenset- 
zung der Relationsmiister , der Auswahl und Zuordnung von 
Codierungen zu den Relationsmustern, sowie der Vertei- 
lung von Relationsmustern und damit der zugehorigen 
Codierung iiber verschiedene Blocke. 

B) Verhaltnisbasierte Markierung von binaren Bildern. 

Der Wert jedes einzelnen Pixels in einem binaren Bild 
entspricht entweder der "1" oder der "0" . Dadurch ist 
im allgemeinen kein Freiraum fur Rauschen bzw. Storun- 
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gen vorhanden, der durch das Implementieren von zusatz- 
lichen Inf orraationen verwendet werden kann. Um Informa- 
tionen, die zuvor binar codiert vorliegen, einbetten zu 
konnen, miissen passende Bereiche im Bild gefunden wer- 
den, bei denen sich durch die Markierung die Qualitat 
des Originalbildes nicht verschlechtert . Diese Bildbe- 
reiche sind fur jedes individuelle Bild bzw. zumindest 
fiir bestimmte Bildtypen unterschiedlich . 

Das vorgeschlagene Verfahren fiir binare Bilder basiert 
auf dem Verhaltnis von "1"- und "0" -Bits in einem ausge- 
wahlten Block. So sei R(b) die Rate der schwarzen Pi- 
xel, beispielsweise der "1 "-Bits, in einem ausgewahlten 
Block b des Bildes: 

R(b) = N s / N. 

N s bedeutet die Anzahl der schwarzen Pixel in dem Block 
b und N die Blockgrope, d.h. die Gesamtzahl der Pixel 
in dem Block b. 



Die Einbettung eines Bits in einen Block b erfolgt nach 
folgender Verf ahrensweise : 

Ein "1"-Bit wird in einem Block b eingebettet, falls 
R(b) innerhalb eines vorgegebenen Bereiches (Ti, ffiin , 
Ti tlIiax ) liegt. Ein "0"-Bit wird dann eingebettet, falls 
R(b) in einem anderen vorgegebenen Bereich (T 2 ,,i B , 
T2,max) liegt. Die beiden angegebenen Bereiche liegen 
zwischen 0% und 100%. Zur Einbettung eines Bits wird 
der jeweils betrachtete Block, falls notig, durch Ande- 
rung von "1"-Bits in "0"-Bits oder umgekehrt so oft 
modifiziert, bis R(b) in den entsprechenden Bereich 
hineinfallt. Falls zu viele Anderungen notwendig sind, 
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wird der ausgewahlte Block fiir "ungiiltig" erklart und 
in irgendeinen "ungultigen " Bereich aufierhalb der bei- 
den angegebenen Bereiche modif iziert. Ferner wird ein 
sogenannter "Puffer" zwischen den angegebenen Bereichen 
und den ungiiltigen Bereichen eingefiihrt, der den Grad 
der Robustheit gegen die Anwendung von Bildverarbei- 
tungsverfahren auf das markierte Bild reprasentiert . 
Der Puffer beschreibt somit die Zahl der Bits, die in 
einem Block durch Bildverarbeitungsverf ahren geandert 
werden diirfen, ohne die eingebetteten Bits zu beschadi- 
gen. Z.B. bedeutet ein Puffer von 5%, dap das Umkippen 
von weniger als 4 Bits innerhalb eines 8x8 Bit-Blocks 
den eingebetteten Code nicht beschadigt . Eine vernunf- 
tige Wahl der Bereiche Ti=(Ti, min , T llffiax ) und 
T2 =(T2 , m in / T 2 , m a x ) sowie des Puffers, z.B. T a =(55,60), 
T 2 =40,45) sowie von einem Puffer = 5 fiir einen 8x8 Bit- 
Block, ermoglicht eine ausgeglichene Balance zwischen 
Robustheit gegen Bildverarbeitungsverf ahren einerseits 
und Sichtbarkeit der eingebrachten Inf ormationen ande- 
rerseits . 

Der Anderungsalgorithmus , nach dem die zu implementie- 
renden Inf orraationseinheiten an die entsprechenden 
durch die Positionsf olgen festgelegten Stellen der 
Datensatze eingebracht werden, ist nicht zuletzt von 
den Verteilungen der und "0"-Bits abhangig. Z.B. 

werden fiir sogenannte "dithered" binare Bilder die 
Modif ikationen gleichmapig iiber den ganzen Block ver- 
teilt vorgenommen. Das Bit, das die meisten Nachbarn 
mit dem gleichen Wert hat, wird geandert. 

Hingegen bei binaren Bildern (Schwarz/Weip) mit 
scharfen Kontrasten werden jedoch die Modif ikationen an 
den Grenzen zwischen schwarzen und weifien Pixeln vorge- 
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nonunen. Das Bit, das die meisten Machbarn niit den umge- 
drehten Werten hat, wird geandert . In beiden Verfahren 
werden an den Grenzen eines Blocks die angrenzenden 
Bits der benachbarten Blocke beriicksichtigt . 

Wie vorstehend beschrieben, wird als Kriterium zur Auswahl 
geeigneter Blocke eine Schwelle eingefiihrt, die allgemein 
einen Grenzwert T aufweist. Falls die Anderungen an den 
ausgewahlten Koef f izienten eines Blocks zur Integration 
eines Bits < T, dann ist der Block giiltig; andernfalls 
ungultig. Es werden im folgenden verschiedene Methoden 
vorgeschlagen, die es ermoglichen, beim Extraktions- 
proze/3 der Markierung f estzustellen, ob es sich um einen 
giiltigen Oder ungiiltigen Block handelt: 

- Eine Aussage tiber die Giiltigkeit jedes Blockes wird zur 
Rekonstruktion der Markierung als zweiter Teil des 
Schlussels abgespeichert . Eine Sequenz "110111..." sagt 
beispielsweise aus, da/3 der erste, zweite, vierte, fiinfte 
und sechste Block giiltig ist, wohingegen der dritte Block 
ungultig ist. Die Folge der Blocke wird wie gehabt mittels 
des Schlussels (1. Teil des Schlussels) und charakteristi- 
schen Eigenschaf ten des Bildes bestimmt. 

- Eine zweite Methode definiert einen Puffer zwischen den 
giiltigen und ungiiltigen Blocken. Falls eine Modifikation 
an den Koef f izienten zur Integration der Markierung groper 
als der Grenzwert T ist, aber kleiner als die Summe von 
Grenzwert und Puffer ware, dann wird dieser Block in der 
Weise modifiziert, dap die Modifikation groJJer ist als die 
Summe aus Grenzwert und Puffer. Diese Technik wird bei 
beiden vorstehend beschriebenen Verfahren angewendet. 

- Falls der Grenzwert T auf "0" gesetzt wird, sind keine 
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Modifikationen an den originalen Daten zur Integration 
einer Markierung erlaubt. In diesem Fall handelt es sich 
urn einen natiirlichen Integrationsproze/3, d.h. es werden 
nur solche Blocke zur Markierung herangezogen, die keine 
Anderungen im Verhaltnis der Grofien der Frequenzkoef f i- 
zienten erfordern. Die Information dariiber, welche 
Blocke/Positionen zur Markierung verwendet werden, werden 
wie oben beschrieben als zweiter Teil eines Schlussels 
abgespeichert . 



c) Verfahren zur Markierung von Bildfolgen 

Die vorstehend vorgestellten Verfahren zum Markieren 
von Bildern beziehen sich vornehmlich auf Markierungs- 
methoden fur Einzelbilder , jedoch konnen diese auch auf. 
Bildfolgen wie beispielsweise Videos, angewendet wer- 
den. Bei Bildfolgen sind zusatzliche Attacken gegen 
vorhandene Markierungen moglich. So konnen einzelne 
Markierungen durch Loschen einzelner Bilder aus der 
Bildfolge entfernt werden. Bewegungsschatzende und 
bewegungskompensierende Kompressionstechniken wie bei- 
spielsweise im MPEG-Standard konnen ebenso zum Entfer- 
nen von Markierungen fiihren. So werden in einem dritten 
Verfahren zur Markierung von Bildfolgen die Markierun- 
gen wiederholt in die Einzelbilder bestimmter Sequen- 
zen der Gesamtbildf olge eingebettet, wobei die Ro- 
bustheit gegen bekannte Attacken dabei erhoht werden 
kann, indem die Lange der Sequenz jeweils zu imple- 
mentierender Inf ormationseinheiten skaliert wird. Im 
Extremfall werden die Inf ormationen in samtliche Ein- 
zelbilder des gesamten Videos integriert. 

Kurze Beschreibung der Zeichnung 

Die Erfindung wird nachstehend ohne Beschrankung des 
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allgemeinen Erf indungsgedankens anhand von Ausfiihrungs- 
beispieln unter Bezugnahme auf die Zeichnungen exempla- 
risch beschrieben. Es zeigen: 



Fig. 



1 



Schreibvorgang fiir eine Markierung, 



Fig. 2 Lesevorgang einer Markierung, 

Fig. 3 Tabelle fiir "1"-, n 0"-Bit und "ungiiltiges 
Muster, 

Fig. 4 mogliche Positionen fiir die Einbettung einer 
Inf ormationseinheit in einen 8x8 Block, 

Fig. 5 Beispiel einer Einbettung einer Informations- 



Fig. 7 beispielhaf te Modifikation zur Markierung bei 

scharfen Trennlinien zwischen "l M - und "0"-Bits. 

Beschrexbung von Ausfiihrungsbeispielen 
In Fig. 1 ist das erf indungsgema/ie Ablauf schema zum 
Einbetten von binar codierten Inf ormationseinheiten in 
einen Datensatz, der im vorliegenden Beispiel ein Bild 
ist, angegeben. Aus den Inf ormationen des Bildes sowie 
unter Zugrundelegung eines geheimen Schliissels wird 
eine Positionsreihenf olge generiert, nach der der ein- 
zubettende Code in das Bild implementiert wird. Als 
Ergebnis wird ein markiertes Bild erhalten, dessen Markie- 
rungen durch unautorisierten Zugriff Dritter oder durch 



einheit durch Transformation, Quantif izierung 
und Modifikation von Frequenzkomponenteri, 



Fig . 



beispielhaf te Modifikation zur Markierung bei 
gleichmapig verteilten "1 M - und M 0 11 —Bits sowie 
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Veranderung des Bildes bzw. des Datensatz nicht beein- 
trachtigt werden kann. 

Fiir den Lesevorgang , der beispielsweise zum Nachverfol- 
gen etwaiger unerlaubter Vervielf altigungen beniitzt 
wird, wird das markierte Bild unter Zugrundelegung des 
vorher verwendeten geheimen Schlussels, der zur Imple- 
mentierung der Inf ormationseinheiten verwandt wurde, 
benutzt, um die Positionsreihenf olge zu generieren, mit 
der das Auslesen des eingebetteten Codes moglich ist 
(siehe Fig.2). Als Ergebnis erhalt man den urspriinglich 
in den Datensatz eingebetteten Code. 

Anhand der Figuren 3 und 4 ist ein Beispiel fiir die 
f requenzbasierte Markierung von Farbbildern, insbeson- 
dere eines 8x8 Pixel-Blockes angegeben. Aus der in Fig. 
3 dargestellten Tabelle sind drei unterschiedliche 
Gruppen von Relationsmustern zwischen 

Frequenzkoef f izienten dargestellt, namlich Muster fiir 
"1", Muster fiir "0" sowie sogenannte "ungiiltige " 
Muster. Das "1" -Muster represent iert ein " 1 11 — Bit bzw. 
das "0" -Muster reprasentiert ein "0 n -Bit der eingebet- 
teten, codierten Inf ormationseinheit . Falls fiir den 
Vorgang der Implementation zu grope Modif ikationen am 
urspriinglichen Datensatz notwendig werden, um bei- 
spielsweise das erwiinschte giiltige Muster fiir ein Bit 
zu erhalten, dann ist dieser Block ungiiltig. In diesem 
Fall werden die Groflenrelationen zwischen den Elementen 
zu einem beliebigen "ungultigen" Muster modifiziert, um 
ein eindeutiges Lesen der Information zu ermoglichen. 
Die in der oberen Tabelle dargestellten Relationsmuster 
stellen Abhangigkeiten von den Verhaltnissen der GrofJen 
je dreier Elemente (e x , e 2 , e 3 ) eines 8x8 Blockes dar 
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Aus Fig. 5 geht exemplarisch ein Einbettungsproze/3 
hervor, der sich aus dem Schritt der Transformation, 
der Quantisierung sowie der Modifikation der Koeffi- 
zienten zusammensetzt . In der in Fig. 4 dargestellten 
Abfolge wird ein Bit fiir ein ausgewahltes Muster in 
einem 8x8 Block implementiert . 

Aus den Fig. 6 und 7 gehen zwei Beispiele fiir die ver- 
haltnisbasierte Markierung zweier binaren Bilder her- 
vor. Fig. 6 stellt ein Beispiel fiir "dithered " binare 
Bilder dar, bei denen die Modif ikationen gleichmaj3ig 
iiber den ganzen Block verteilt sind. Die Implementie- 
rung erfolgt in diesem Fall derart, dap das Bit, das 
die meisten Nachbarn mit gleichen Wert hat, geandert 
wird. 

Im Unterschied dazu geht aus Fig. 7 ein binares Bild 
mit sehr scharfen Kontrasten hervor, bei dem die Imple- 
mentierungen an den Grenzen zwischen schwarzen und 
wei/Jen Pixeln vorgenommen wird. Das Bild, das die mei- 
sten Nachbarn mit den umgedrehten Werten aufweist, wird 
geandet . 

In beiden dargestellten Fallen werden an den Grenzen 
eines Blockes die angrenzenden Bits der benachbarten 
Blocke beriicksichtigt . 

Das vorstehend beschriebene erf indungsgemafie Verfahren 
ermoglicht es Inf ormationen in multimedialen Werke, 
insbesondere Bilder und Bildsequenzen, geheim, ver- 
steckt und robust zu integrieren. Die in die originalen 
Daten eingebetteten Inf ormationen (Kennungen, Markie- 
rung, Etikette) konnen dazu verwendet werden, den Hal- 
ter des Urheberrechts auf das multimediale Werk, den 
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Abnehmer bzw. Benutzer des Werkes oder auch das multi- 
mediale Werk an sich zu kennzeichnen bzw. zu identifi- 
zieren. Zwar wird mit dem erf indungsgemafJen Verfahren 
der eigentliche Mipbrauch nicht unmittelbar verhindert, 
, doch sehr wahrscheinlich eingeschrankt , da die Markie- 

rung der Dokumente fiir die Geltendmachung der Urheber- 
rechte beweisdienlich ist. Die robuste und versteckte 
Integration von Inf ormationen kann jedoch auch fiir 
andere Zwecke benutzt werden, wie der Einbettung von 
privaten Inf ormationen, beispielsweise Patientendaten, 
in die zugehorigen digitalen Bilder, beispielsweise 
Patientenbilder, wodurch auch stets eine verwechs lungs- 
freie Zuordnung gewahrleistet ist. Ferner konnen Mar- 
kierungen in multimedialen Werken, wie z.B. Musik- und 
Filmsequenzen zur automatischen Bestimmung bzw. Messung 
der Benutzerzahl verwendet werden. 

Die Anwendungsgebiete dieser Erfindung beinhalten alle 
elektronischen Inf ormationsdienste, in denen der Schutz 
von unerlaubten Zugriff , Verteilung und Vervielf alti- 
gung von digitalen Daten sowie der Schutz von intelek- 
tuellen Besitzanspruchen erforderlich sind. Das vor- 
dringlichste Anwendungsgebiet ist als elektronische 
Publizieren von Zeitungen, Buchern, Bildern # Videos 
etc. auf einem portablen Medium, wie z.B. CDs, CD-Roms, 
Disketten, Bander, sowie uber Netzwerke, Satellit Oder 
terestrische Ubertragungsmedien . Die vorgestellten 
Verfahren sind ebenso einsetzbar in den Anwendungsf el- 
dern der geographischen Inf ormationssysteme , der Medi- 
zin, den elektronischen Verteilerdiensten wie Pay-TV, 
Video-On-Demand usw. sowie der genaueren Messung der 
Konsumentenzahl im Bereich des Rundfunk und Fernsehens . 
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Patentanspriiche 



1. Verfahren zur Markierung binar codierter Datensat- 
ze, insbesondere von Bilddaten oder Audio-Signalen, durch 
Implement ierung wenigstens einer Inf ormationseinheit in 
einen Datensatz, 

dadurch gekennzeichnet , da/5 eine diskrete Positionsf olge 
zur Implementierung von Inf ormationseinheiten in den zu 
markierenden Datensatz unter Berttcksichtigung daten- 
satzspezifischer Eigenschaf ten sowie unter Verwendung 
eines Schliissels generiert wird und, 

dap die zu implementierende Inf ormationseinheit an die 
durch die Positionsf olge festgelegten Positionen im 
Datensatz geschrieben bzw. gelesen wird. 

2. Verfahren nach Anspruch 1, 

dadurch gekennzeichnet, dap die datensatzspezif ischen 
Eigenschaf ten inhaltliche Merkmale, Ob jektmerkmale oder 
geometrische oder f ormatspezif ische Eigenschaf ten sind. 

3 . Verfahren nach Anspruch 1 oder 2 , 

dadurch gekennzeichnet, da/5 der zu markierende Daten- 
satz in wenigstens einen Block von Pixeln bzw. 
Zeitsignalen eingeteilt wird, der/die mittels einer 
Trans formations funkt ion vom Ortsraum bzw. Zeitbereich in 
den Frequenzraum transf ormiert wird/werden. 

4 . Verfahren nach Anspruch 3 , 

dadurch gekennzeichnet, da/3 die Transf ormat ions funkt ion 
eine diskrete Cosinus Transformation, eine Wavelet- 
Transformation, eine Fouriertrans format ion, Hadamard-Walsh 
Trans formationen oder eine Z-Trans formation ist. 
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5. Verfahren nach Anspruch 3 oder 4, 

dadurch gekennzeichnet , da/1 unter Verwendung von Quan- 
tisierungsmatrizen die in den Freguenzraum transfor- 
mierten Blocke guantisiert werden. 

6. Verfahren nach Anspruch 5, 

dadurch gekennzeichnet, da/3 die Quantisierungsmatrizen 
dem Quantisierungsschritt des JPEG-Kompress ions stan- 
dards entsprechen . 

7. Verfahren nach Anspruch 5, 

dadurch gekennzeichnet, da/3 unter Zugrundelegung der 
generierten Positionsf olge die zu implement ierenden 
Inf ormationseinheiten in die Blocke eingebettet werden. 

8 . Verfahren nach einem der Anspriiche 1 bis 7 , 
dadurch gekennzeichnet, da/3 die Einbettung der zu 
implementierenden Inf ormationseinheiten an den ausge- 
wahlten Positionen bzw. Blocken durch Anderung bzw. 
Beibehaltung der Gr6/3enverhaltnisse von ausgewahlten 
Frequenzkoef f izienten, insbesondere des mittleren 
Frequenzbereichs , erf olgt . 

9. Verfahren nach Anspruch 5, 

dadurch gekennzeichnet, da/3 nach Einbettung der Inf or- 
mationseinheit eine Riickquantisierung und Riicktrans for- 
mation des Datensatzes in den Ortsraum erf olgt. 

10. Verfahren zur Markierung binar codierter Datensat- 
ze, insbesondere von Bilddaten, durch Implement ierung 
wenigstens einer Inf ormationseinheit in einen Daten- 
satz , 

dadurch gekennzeichnet, da/3 der binar codierte Daten- 
satz in Blocke mit N Pixel aufgeteilt wird, wobei die 
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Einbettung der zu implement ierenden In- 

formationseinheiten unter Verwendug eines Schlussels an 
den ausgewahlten Positionen bzw. Blocken durch Anderung 
bzw. Beibehaltung der anzahlma£igen Verhaltnisse von "1"- 
und "0"-Bits in den jeweiligen Blocken erfolgt. 

11. Verfahren nach Anspruch 10, 

dadurch gekennzeichnet, da/3 die Einbettung einer Infor- 
mationseinheit, die einem 1-Bit entspricht, in einem 
Block b nach folgender Bedingung erfolgt: 

Ti ,. tn < R(b) < Ti , ffiax 

mit R(b) = Ni / N 

Ni = Anzahl der 1-Bit-Pixel im Block b 
Ti.min/ Ti, m ax oberer und unterer Grenzwerte . 



12. Verfahren nach Anspruch 10, 

dadurch gekennzeichnet, dap die Einbettung einer Infor- 
roationseinheit, die einem 0-Bit entspricht, in einem 
Block b nach folgender Bedingung erfolgt: 

T 2 , »in < R{b) < T 2 , max 

mit R(b) = Ni / N 

T2,min/ T2,max oberer und unterer Grenzwerte . 
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13. Verfahren nach Anspruch 11 oder 12, 

dadurch gekennzeichnet, dap fur ein 8x8 Bit-Block 

folgende Werte gelten: 



Ti 


, m i n ~ 


55 


Ti 


, m a x = 


60 


T 2 


, m i n ~ 


40 


T 2 


, m a x = 


45. 



14. Verfahren nach Anspruch 10 , 

dadurch gekennzeichnet, dap bei Blocken rait relativ 
gleichmapig verteilten Bit-Werten, an den Stellen Bit- 
Implement ierungen vorgenommen werden, deren Nach- 
barstellen einen hohen Anteil von Bits mit gleichen 
Wert haben. 

15. Verfahren nach Anspruch 10 , 

dadurch gekennzeichnet, dap bei Blocken, die Bereiche 
einheitlicher Bit-Stellung aufweisen, an Stellen Bit- 
Implement ierungen vorgenommen werden, an denen Felder 
unterschiedlicher Bit-Stellungen aneinandergrenzen, so 
dap das Bit mit den me is ten Nachbarn mit den umgekehr- 
ten Werten geandert wird. 

16. Verfahren nach einem der Anspriiche 11 bis 15, 
dadurch gekennzeichnet, dap fur den Fall, dap zu starke 
Anderungen zur Einbettung von Inf ormationen an den 
ausgewahlten Positionen notwendig sind, wird der ent- 
sprechende Block als ungiiltig markiert, wobei 
ungultige Bereiche auPerhalb der Bereiche 

Ti=(Ti |Tnin ,Ti f m ax ) r T 2 =(T 2 , oin ,T 2 , tta x ) liegen . 
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17. Verfahren nach Anspruch 16, 

dadurch gekennzeichnet, dap ein zusatzlicher Toleranz- 
puffer zwischen T 2 , T 2 und ungiiltigen Bereichen einge- 



fiihrt wird. 
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